Data & Analytics > DataFlow > リリースノート
2024. 04. 23.
機能追加
バグ修正
- ノードが多いフローモニタリングを照会する場合、照会に失敗する問題を修正しました。
2024. 03. 26.
機能追加
- フロードレイン後に終了する機能を追加
- フローの残余イベントを全て処理するドレインを行った後、フローを終了する機能を追加しました。
- ドレイン中のフローはフロー終了ですぐに終了できます。
- タイムアウト時間内にドレインが終了したり、ドレイン中にタイムアウト時間を超えた場合、その時点でフローは終了します。
2024. 02. 27.
機能改善/変更
- S3、OBSノードの説明に使用される「ファイル」と「オブジェクト」という単語を「オブジェクト」に統一しました。
- フローの保存、開始、停止、検査要求時にロードUIが表示されるように修正しました。
- ノードの設定順序をより自然に修正しました。
バグ修正
- S3, OBS Sinkノードを含むフローを保存する際、検証の過程でテスト用の一時的なオブジェクトが断続的に残る問題を修正しました。
- フローを削除する際、そのフローに保存されたスケジューリングが一緒に削除されない問題を修正しました。
- プロジェクト有効化直後にフローを作成すると、そのフローが実行されない問題を修正しました。
- 長い期間のモニタリングを照会する場合、照会に失敗する問題を修正しました。
- 有効性検査機能の実行状態が"Activating"から"Active"に遷移する際、実際の状態より早く遷移する問題を修正しました。
2024. 01. 23.
機能改善/変更
- 最初のフローを作成しないと有効性検査機能がオンにならないバグを修正しました。
2023. 12. 19.
機能追加
- 新規ノード追加
- Source
- DB にクエリを実行してデータを取得する機能を追加しました。
- Sink
- parquetタイプでObject Storageにデータを保存する機能を追加しました。
- parquetタイプでS3にデータを保存する機能を追加しました。
バグ修正
- フローを作成しても有効性検査機能が正常に動作しないバグを修正しました。
2023.11. 28.
機能改善/変更
- フロー保存、有効性検査時にエラーコードを追加しました。
- 有効性検査機能を使用するかどうかを選択できるように変更しました。
2023. 10. 31.
機能改善/変更
- DataFlow サービス環境を初期化する過程で発生するエラーメッセージを改善し、ユーザーに分かりやすくしました。
2023. 10. 17.
機能改善/変更
- Log & Crash Search SourceノードにSecretKeyプロパティが追加されました。
2023. 09. 26.
機能改善/変更
- データを処理する時にAt Least Onceをサポートできるように修正しました。
- S3、OBS SinkノードのPrefix設定に時間形式用の新規オプションが追加されました。
バグ修正
- Log & Crash Search Sourceノード終了中にエラーが発生すると、フローが終了しないバグを修正しました。
- Cipher Filterノードを含むフローをコピーした後、すぐに実行するとフローが正常に動作しないバグを修正しました。
- フロー終了中にエラーが発生した場合、再度終了をリクエストしても失敗するバグを修正しました。
2023. 07. 25.
バグ修正
- フロー実行中に失敗して再実行する際、最後に実行したポイントから引き続き実行できるように修正しました。
2023. 06. 27.
機能追加
- Log & Crash Search連動機能の追加
- フローのログをLog & Crash Searchに保存できる機能を追加しました。
バグ修正
- ログ表示ボタンの有効化タイミングを調整
- ログ表示ボタンの有効化タイミングをPREPARING段階に修正しました。
2023. 03. 28.
機能追加
- 新規ノード追加
- Filter
- Alter、Date、UUID、Split、Truncateなどさまざまなデータ処理方法を追加しました。
- フロー使用量表示機能を追加
- コンソールでフロー使用量をリアルタイムで確認できる機能を追加しました。
バグ修正
- PREPARING段階に入る前にフロー使用量が先に上がるバグを修正しました。
2023. 02. 28.
機能追加
- 新規ノード追加
- Source
- NHN Cloud ObjectStorageノードからデータを取得する機能を追加しました。
- Amazon S3インタフェースを介してデータを取得する機能を追加しました。
- Apache Kafkaを介してデータを取得する機能を追加しました。
- Filter
- grok、json、csvノードを追加してデータをさまざまに前処理する機能を追加しました。
2023. 01. 06.
バグ修正
- フロー編集画面でノードを追加した後に最初のボタンクリックが動作しない問題を修正しました。
- Cipherノードのフィールド追加を設定しても実際にはフィールドが追加されていない問題を修正しました。
2022. 12. 27.
新規サービスリリース
- ETLフローの作成および実行ができるサービスです。
- 下記のSourceをサポートします。
- NHN Cloud Log & Crash Search
- NHN Cloud CloudTrail
- 下記のFilterをサポートします。
- Cipher (NHN Cloud Secure Key Manager連動必要)
- 下記のSinkをサポートします。
- NHN Cloud Object Storage
- Amazon S3 (Compatible)
- Apache Kafka